草庐IT

python - 将 selenium 响应 url 传递给 scrapy

全部标签

ruby-on-rails - 如果 Mechanize 在无响应的网站上等待,我该怎么办?

我注意到当我使用Mechanize获取没有响应的站点时,它只是继续等待。我该如何克服这个问题? 最佳答案 有几种方法可以处理它。Open-Uri和Net::HTTP有传递超时值的方法,然后告诉底层网络堆栈您愿意等待多长时间。例如,Mechanize允许您在初始化实例时获取其设置,例如:mech=Mechanize.new{|agent|agent.open_timeout=5agent.read_timeout=5}所有这些都在new的文档中,但您必须查看源代码才能了解您可以获得哪些实例变量。或者你可以使用Ruby的timeout模

ruby - 使用正则表达式获取 URL 的域

我正在尝试获取给定URL的域。例如http://www.facebook.com/someuser/将返回facebook.com。给定的URL可以是以下格式:https://www.facebook.com/someuser(www.是可选的,但应忽略)www.facebook.com/someuser(http://不是必需的)facebook.com/someuserhttp://someuser.tumblr.com->这只能返回tumblr.com我写了这个正则表达式:/(?:\.|\/{2})(?:www\.)?([^\/]*)/i但它并没有像我预期的那样工作。我可以分部分

ruby - 我们可以一起使用 selenium-webdriver 和 nokogiri 吗?

我使用Nokogiri如下:require'nokogiri'require'open-uri'#GetaNokogiri::HTML::Documentforthepagewe’reinterestedin...doc=Nokogiri::HTML(open('http://www.google.com/search?q=sparklemotion'))但是我不好,可能是由于公司的防火墙,我得到了错误:C:/Ruby193/lib/ruby/1.9.1/net/http.rb:762:in`initialize':getaddrinfo:Nosuchhostisknown.(Sock

ruby - 使用 Fog 和 Ruby 生成预签名 URL 以将文件放入 Amazon S3

我正在使用Foggem生成预签名url。我可以成功执行此操作以获得对该文件的读取权限。这是我的做法:fog_s3=Fog::Storage.new({:provider=>'AWS',:aws_access_key_id=>key,:aws_secret_access_key=>secret})object_path='foo.wav'expiry=Date.new(2014,2,1).to_time.to_iurl=fog_s3.directories.new(:key=>bucket).files.new(:key=>object_path).url(expiry,path_sty

Ruby URI - 如何在 URL 之后获取完整路径

给定以下内容,如何获取URL的完整路径uri=URI("http://foo.com/posts?id=30&limit=5#time=1305298413")我只想要posts?id=30&limit=5#time=1305298413我试过uri.path并返回/posts和ui.query返回'id=30&limit=5' 最佳答案 您要找的方法是request_uriuri.request_uri=>"/posts?id=30&limit=5"如果需要,您可以使用任何您想要删除前导/的方法。编辑:要获取#符号后的部分,请使用

ruby - 将变量传递给 Liquid 模板中的模型实例方法

这个周末我一直在研究Liquid模板引擎,我想知道以下是否可行。假设我在Blog模型中有一个latest_posts方法,我可以将一个整数传递给该方法以获取最新的N篇文章。是否可以在液体模板中使用该方法?例如:classBloghas_many:postsdeflatest_posts(n)posts.latest(n)#usinganamedscopeenddefto_liquid(*args){'all_posts'=>posts.all,#allowsmetouse{%forpostsinblog.all_posts%}'last_post'=>post.last,#allows

ruby - 如何将鼠标悬停在(鼠标悬停)Selenium Ruby 中的元素上?

有人知道如何在SeleniumRubyWebdriver中将鼠标悬停在元素上吗?我的代码是这样的:el=driver.find_element(:css=>"#foo")driver.move_toel#HowdoItriggeramouseovereventonthiselement?我在Linux32位的Firefox中使用selenium-webdrivergem。 最佳答案 我使用了driver.action.move_to(el).perform,它与其他答案略有不同,所以我想为了完整起见我会把它包括在内。

ruby-on-rails - 亚马逊 s3 - ruby 。获取刚刚上传的资源的URL

我有以下用于将本地文件上传到AmazonS3存储桶的代码:require'aws/s3'moduleAmazonS3defself.upload_file(local_file)bucket_name="bucketfortest"s3=AWS::S3.new(:access_key_id=>ENV["AMAZON_ACCESS_KEY"],:secret_access_key=>ENV["AMAZON_SECRET_KEY"])key=File.basename(local_file)amazon_object=s3.buckets[bucket_name].objects[key]

ruby - 检查是否没有参数传递

这是一些代码:$cat1.rb#!/usr/bin/envrubydeffp1=nilunlessp1#TODOputs'noparameterspassed'endendffnil$./1.rbnoparameterspassednoparameterspassed问题是,有没有办法区分没有参数和传递了一个nil参数?UPD我决定在javascript中添加一个用例,希望让事情变得更清楚:someProp:function(value){if(arguments.length){this._someProp=value;}returnthis._someProp;}

ruby - 使用 Ruby 为 CloudFront 创建签名 url

历史:我在Amazon上创建了一个key和pem文件。我创建了一个私有(private)存储桶我创建了一个公共(public)分配并使用原始ID连接到私有(private)存储桶:有效我创建了一个私有(private)分配并像#3一样连接它-现在我得到拒绝访问:预期我很难生成一个有效的url。我一直在尝试按照此处描述的说明进行操作:http://docs.amazonwebservices.com/AmazonCloudFront/latest/DeveloperGuide/index.html?PrivateContent.html这就是我到目前为止所得到的......虽然不起作用-